Độ tin cậy là gì? Các công bố khoa học về Độ tin cậy

Phân tích nội dung là một kỹ thuật nghiên cứu định tính được sử dụng rộng rãi. Thay vì là một phương pháp duy nhất, các ứng dụng hiện nay của phân tích nội dung cho thấy ba cách tiếp cận khác biệt: thông thường, có định hướng hoặc tổng hợp. Cả ba cách tiếp cận này đều được dùng để diễn giải ý nghĩa từ nội dung của dữ liệu văn bản và do đó, tuân theo hệ hình tự nhiên. Các khác biệt chính giữa các cách tiếp cận là các bộ mã hóa, nguồn gốc của mã hóa và mối đe dọa đến độ tin cậy. Trong phân tích nội dung thông thường, các danh mục mã hóa được lấy trực tiếp từ dữ liệu văn bản. Với một cách tiếp cận có định hướng, phân tích bắt đầu với một lý thuyết hoặc các kết quả nghiên cứu liên quan để làm cơ sở cho các mã ban đầu. Phân tích nội dung tổng hợp bao gồm việc đếm và so sánh, thường là các từ khóa hoặc nội dung, tiếp theo là diễn giải bối cảnh cơ bản. Các tác giả phân định các quy trình phân tích cụ thể cho từng cách tiếp cận và các kỹ thuật nhằm nâng cao độ tin cậy với các ví dụ giả định từ lĩnh vực chăm sóc cuối đời.

Đặt vấn đề:  Do những khó khăn phương pháp học cụ thể trong việc tiến hành các thử nghiệm ngẫu nhiên, nghiên cứu phẫu thuật chủ yếu phụ thuộc vào các nghiên cứu quan sát hoặc không ngẫu nhiên. Chỉ có một ít công cụ đã được xác thực để xác định chất lượng phương pháp luận của các nghiên cứu này, cả từ góc độ của người đọc lẫn nhằm mục đích tổng hợp phân tích. Mục tiêu của nghiên cứu hiện tại là phát triển và xác thực một công cụ như vậy.

Phương pháp:  Sau giai đoạn khái niệm ban đầu về một chỉ số phương pháp luận cho các nghiên cứu không ngẫu nhiên (MINORS), danh sách 12 mục tiềm năng đã được gửi đến 100 chuyên gia từ các chuyên khoa phẫu thuật khác nhau để đánh giá, và cũng được 10 chuyên gia về phương pháp lâm sàng đánh giá. Việc kiểm tra tiếp theo liên quan đến việc đánh giá mức độ đồng thuận giữa các người đánh giá, độ tin cậy của bài kiểm tra chéo tại 2 tháng, độ tin cậy nhất quán nội bộ và độ xác thực bên ngoài.

Mục đích. Bài báo này xem xét và minh họa việc sử dụng và diễn giải thống kê kappa trong nghiên cứu cơ xương khớp. Tóm tắt những điểm chính. Độ tin cậy của đánh giá từ các lâm sàng là một yếu tố quan trọng trong các lĩnh vực như chẩn đoán và diễn giải các phát hiện từ kiểm tra. Thường thì những đánh giá này nằm trên một thang đo danh nghĩa hoặc thứ bậc. Đối với những dữ liệu như vậy, hệ số kappa là một thước đo độ tin cậy thích hợp. Kappa được định nghĩa, cả dưới dạng có trọng số và không có trọng số, và việc sử dụng nó được minh họa bằng các ví dụ từ nghiên cứu cơ xương khớp. Các yếu tố có thể ảnh hưởng đến độ lớn của kappa (tần suất, thiên lệch và các đánh giá không độc lập) được thảo luận, và các cách đánh giá độ lớn của kappa thu được cũng được xem xét. Vấn đề kiểm tra thống kê kappa được xem xét, bao gồm việc sử dụng khoảng tin cậy, và kích thước mẫu thích hợp cho các nghiên cứu độ tin cậy sử dụng kappa cũng được trình bày trong bảng. Kết luận. Bài báo kết thúc với các khuyến nghị cho việc sử dụng và diễn giải kappa.

Tóm tắt: Mục tiêu– Để kiểm tra độ tin cậy của hệ thống chấm điểm chỉ số phạm vi và mức độ nghiêm trọng của eczema (EASI) bằng cách đánh giá tính nhất quán giữa và trong các người đánh giá. Thiết kế: Đào tạo các người đánh giá, áp dụng và đánh giá trong 2 ngày liên tiếp. Địa điểm– Một trung tâm học thuật. Bệnh nhân– Hai mươi người lớn và trẻ em mắc bệnh viêm da cơ địa (AD); nhóm 1 (10 bệnh nhân ≥8 tuổi) và nhóm 2 (10 bệnh nhân <8 tuổi). Can thiệp– Không có. Biện pháp kết quả chính– EASI được 15 người đánh giá da liễu sử dụng để đánh giá bệnh viêm da cơ địa ở nhóm 1 và nhóm 2 trong 2 ngày liên tiếp. Độ tin cậy giữa và trong các người đánh giá đã được phân tích. Kết quả– Độ tin cậy tổng thể giữa các người đánh giá về EASI ở mức trung bình đến tốt. Phân tích độ tin cậy giữa các người đánh giá cho thấy các người đánh giá đã đánh giá bệnh nhân một cách nhất quán trong cả hai ngày nghiên cứu. Kết luận– Nghiên cứu này đã chứng minh rằng EASI có thể được học nhanh chóng và sử dụng một cách tin cậy trong việc đánh giá mức độ nghiêm trọng và phạm vi của AD. Có tính nhất quán giữa các người đánh giá giữa các ngày đánh giá liên tiếp. Những kết quả này hỗ trợ việc sử dụng EASI trong các thử nghiệm lâm sàng về các tác nhân điều trị cho AD.

Xuất phát điểm. Nghiên cứu này cung cấp dữ liệu bổ sung về tính chất tâm lý của Danh sách Kiểm tra Triệu chứng Trầm cảm 30 mục (IDS) và Danh sách Kiểm tra Triệu chứng Trầm cảm Nhanh (QIDS), một thang đo nhanh 16 mục về mức độ nghiêm trọng của triệu chứng được phát triển từ dạng dài hơn. Cả IDS và QIDS đều có sẵn dưới dạng đánh giá bởi bác sĩ (IDS-C₃₀; QIDS-C₁₆) và tự báo cáo (IDS-SR₃₀; QIDS-SR₁₆).

Phương pháp. Các mẫu bệnh nhân bao gồm 544 bệnh nhân ngoạikhoa với rối loạn trầm cảm chủ yếu (MDD) và 402 bệnh nhân ngoại khoa với rối loạn lưỡng cực (BD) lấy từ 19 phòng khám đa dạng vùng miền và sắc tộc trong Dự án Thuật toán Thuốc Texas (TMAP). Các phân tích tâm lý học, bao gồm độ nhạy cảm với sự thay đổi điều trị, đã được tiến hành.

Kết quả. Tính nhất quán nội bộ (alpha Cronbach) dao động từ 0,81 đến 0,94 cho cả bốn thang đo (QIDS-C₁₆, QIDS-SR₁₆, IDS-C₃₀ và IDS-SR₃₀) ở cả bệnh nhân MDD và BD. Tâm trạng buồn, tham gia, năng lượng, tập trung và quan điểm cá nhân có mối tương quan mục-tổng cao nhất ở bệnh nhân MDD và BD trên tất cả bốn thang đo. Tổng số điểm của QIDS-SR₁₆ và IDS-SR₃₀ có mối tương quan cao ở bệnh nhân MDD khi kết thúc (c=0,83). Các điểm tổng của QIDS-C₁₆ và IDS-C₃₀ cũng có mối tương quan cao ở bệnh nhân MDD (c=0,82) và bệnh nhân BD (c=0,81). IDS-SR₃₀, IDS-C₃₀, QIDS-SR₁₆, và QIDS-C₁₆ có độ nhạy đáng kể với sự thay đổi triệu chứng, chỉ ra độ tin cậy cao đồng thời của cả bốn thang đo. Độ tin cậy cao đồng thời cũng được ghi nhận dựa trên điểm Tóm tắt Sức khỏe Tâm thần SF-12 cho dân số được chia theo nhóm dựa trên điểm số IDS hoặc QIDS.

Kết luận. QIDS-SR₁₆ và QIDS-C₁₆, cũng như phiên bản dài hơn 30 mục, có đặc điểm tâm lý đáng chấp nhận cao và là các biện pháp nhạy cảm với điều trị của tình trạng nghiêm trọng của triệu chứng trầm cảm.

Một nghiên cứu tổng quát hóa độ tin cậy cho thang đo trạng thái-tính cách lo lắng của Spielberger (STAI) đã được thực hiện. Tổng cộng có 816 bài báo nghiên cứu sử dụng thang đo STAI từ năm 1990 đến 2000 được xem xét và phân loại thành: (a) không đề cập đến độ tin cậy (73%), (b) có đề cập đến độ tin cậy hoặc báo cáo các hệ số độ tin cậy từ nguồn khác (21%), hoặc (c) tự tính toán độ tin cậy cho dữ liệu hiện tại (6%). Các bài báo trên các tạp chí chuyên ngành y khoa thường ngắn hơn và ít có khả năng đề cập hoặc tính toán độ tin cậy so với các bài báo không thuộc lĩnh vực y khoa, có thể do sự khác biệt trong cách tiếp cận. Trung bình, các hệ số độ tin cậy cho cả tính nhất quán nội bộ và thử nghiệm lại đều chấp nhận được, nhưng có sự biến thiên trong số các ước lượng. Các hệ số thử nghiệm lại của trạng thái thấp hơn các hệ số tính nhất quán nội bộ. Sự biến đổi điểm số có dự đoán được độ tin cậy về tính nhất quán nội bộ cho điểm số trên cả hai thang đo. Các yếu tố dự đoán khác là tuổi của các đối tượng tham gia nghiên cứu, hình thức của STAI và loại thiết kế nghiên cứu.

Mặc dù nhiều nhà nghiên cứu đã bày tỏ lo ngại về sự thiếu cơ sở lý thuyết cho cấu trúc đánh giá người dùng và sự thiếu tính hợp lệ của các công cụ đo lường cụ thể, cấu trúc này vẫn được sử dụng rộng rãi trong nghiên cứu hệ thống thông tin (IS). Bài báo này báo cáo về sự phát triển và tính hợp lệ đo lường của một công cụ chẩn đoán được sử dụng trong nghiên cứu gần đây để đánh giá tổng thể hệ thống thông tin và dịch vụ của một tổ chức. Một đặc điểm nổi bật của công cụ này là nó được xây dựng dựa trên lý thuyết khớp nhiệm vụ-công nghệ (TTF), trong đó mối quan hệ giữa chức năng của hệ thống thông tin và yêu cầu nhiệm vụ dẫn đến những đánh giá tích cực từ người dùng và tác động hiệu suất tích cực. Cụ thể, việc phát triển công cụ được hướng dẫn bởi một mô hình nhiệm vụ của quá trình ra quyết định quản lý sử dụng thông tin tổ chức đã ghi lại. Mô hình này gợi ý các chức năng hệ thống thông tin khác nhau mà người dùng cần cho nhiệm vụ đó, từ đó làm cơ sở cho một công cụ “khớp nhiệm vụ-công nghệ” (TTF). Công cụ này do đó đo lường mức độ mà hệ thống thông tin và dịch vụ của tổ chức đáp ứng nhu cầu thông tin của các nhà quản lý. Một bài kiểm tra toàn diện về tính hợp lệ đo lường của công cụ đã được thực hiện trên một mẫu 357 người dùng tại 10 công ty. Kết quả cho thấy công cụ này có độ tin cậy tuyệt vời và tính hợp lệ phân biệt cho 12 khía cạnh của TTF, đồng thời cũng thể hiện tính hợp lệ dự đoán mạnh mẽ. Cuối cùng, công cụ này được so sánh với hai công cụ đánh giá người dùng nổi tiếng khác. Mặc dù không có một công cụ nào có thể đáp ứng tất cả các nhu cầu, công cụ được trình bày ở đây nên được coi là một lựa chọn hấp dẫn cho các nhà nghiên cứu và những người thực hành đang tìm kiếm để đo lường hiệu quả của hệ thống thông tin tổ chức.

Chúng tôi đã phát triển một công cụ đánh giá cơn đau ở trẻ sơ sinh có tên là CRIES. Công cụ này là một thang điểm mười, tương tự như điểm số APGAR (Apgar 1953). Nó là viết tắt của năm biến số về sinh lý và hành vi đã được chứng minh có liên quan đến cơn đau ở trẻ sơ sinh. C—Khóc; R—Cần tăng liều cung cấp oxy; I—Tăng các dấu hiệu sinh tồn; E—Biểu hiện; S—Mất ngủ. Chúng tôi đã kiểm tra tính hợp lệ và độ tin cậy của CRIES. Báo cáo này là kết quả của cuộc thử nghiệm đó. Chúng tôi đã thấy rằng CRIES là hợp lệ, đáng tin cậy và được các y tá sơ sinh chấp nhận tốt.

Tóm tắt: Khi tiếp xúc với tế bào hạt tiểu não nuôi cấy với 100 µM glutamat kết hợp glycine trong điều kiện không có Mg²⁺, sự tải canxi của ty thể tại chỗ xảy ra dẫn đến tính độc kích thích, được chứng minh bằng sự sụp đổ của tỷ lệ ATP/ADP của tế bào, sự mất điều hòa Ca²⁺ trong tế bào chất (không duy trì được nồng độ Ca²⁺ tự do ổn định trong tế bào chất) và khả năng chết tế bào lan rộng. Sự mất điều hòa Ca²⁺ do glutamat gây ra tăng cao khi có sự hiện diện của chất ức chế chuỗi hô hấp ti thể, rotenone. Tế bào được duy trì bởi ATP từ glycolysis, tức là có sự hiện diện của chất ức chế tổng hợp ATP của ti thể, oligomycin, vẫn tồn tại được trong vài giờ nhưng vẫn dễ bị hại bởi glutamat; do đó, sự gián đoạn tổng hợp ATP từ ti thể không phải là bước cần thiết trong tính độc kích thích của glutamat. Ngược lại, sự kết hợp giữa rotenone (hoặc antimycin A) và oligomycin, làm sụp đổ điện thế màng ti thể, ngăn chặn vận chuyển Ca²⁺ của ti thể, cho phép các tế bào tiếp xúc với glutamat duy trì được tỷ lệ ATP/ADP cao trong khi tích lũy ít ⁴⁵Ca²⁺ và duy trì nồng độ Ca²⁺ tự do thấp trong tế bào chất, được đánh giá bằng fura-2. Kết luận rằng sự tích lũy Ca²⁺ ở ty thể là trung gian cần thiết trong tính độc kích thích của glutamat, trong khi dòng Ca²⁺ giảm vào các tế bào có ty thể đã khử cực có thể phản ánh sự ức chế ngược của thụ thể NMDA qua trung gian tích lũy Ca²⁺ tại một vi vùng tiếp cận được của ti thể.